Extract Transform Load (ETL)
from AWS SAA学習ログ｜Ping-tを活用して本番試験に慣れる 2024/7/12
質問.iconETLとは？
データのExtract(抽出)・Transform(変換)・Load(書き出し)を意味する用語
Extract(抽出)：様々なデータソースからデータを取得する
Transform(変換)：集計・削除・更新などを行い、統合する
Load(書き出し)：変換されたデータをDWHへ書き出す
質問.iconAWSの代表的なETLツール
AWS Glue
→サーバレス
AWS Date Pipeline
→EC2が立ち上がる
Amazon EMR
→大規模データを扱う場合に活用し、でクラスター構成のEC2を管理する必要がある
AWS Data Firehose
→リアルタイムのストリーミングに特化したもの